Метод токенизации

Перевод метод токенизации на английский язык

Мы изучили новый метод токенизации текста.

We studied a new method of text tokenization.